web crawler 205
Un web crawler, en español araña web, araña de la web o rastreador web, es un programa informático que es capaz de rastrear, recorrer e inspeccionar páginas y sitios web en general, de forma automática y sistemática. Es una especie de robot web muy utilizado hoy en día. Su principal uso es en motores de búsqueda, pero éste no es el único uso en absoluto. Las arañas web pueden utilizarse en multitud de tareas, incluso, con fines ilegales, como cuando son utilizadas con un propósito malintencionado, y en este caso quien las utiliza suele recurrir a técnicas maliciosas como la falsificación o suplantación de identidad para lograr sus objetivos.